ScholarQuest: A Taxonomy-Guided Benchmark for Agentic Academic Paper Search in Open Literature Environments
ScholarQuest：基于分类法的智能体学术搜索评估基准
🧭 Agent 检索评估 · 分类法引导
State Key Lab of Cognitive Intelligence, University of Science and Technology of China
提出 ScholarQuest 基准，系统评估智能体在开放文献环境中的迭代检索能力
📌 工作参考价值（4 点）
- 意图分类法可迁移至电商搜索：将查询意图细分为方法导向、场景锚定、对比型等，用于构建更丰富的搜索评测集或指导 Agent 的意图识别。
- 共享检索后端保证可复现性：固定文献库 ScholarBase 的设计思路可直接用于搭建企业内部的搜索 Agent 评测平台，确保不同方法在相同语料上公平对比。
- 多维评估信号：同时关注召回、效率与不同意图下的鲁棒性，为推荐/搜索 Agent 提供更全面的诊断信息，避免单指标误导。
- 基于引用图的可扩展答案构造：利用引用关系自动扩张相关论文，类似在推荐中利用物品共现链扩展候选池，可启发生成式推荐的评测数据生成。